意念所至,萬(wàn)物皆應(yīng),這一幕看似來(lái)自科幻電影,宛如超能者的天賦,或是魔法世界的奇跡。在現(xiàn)實(shí)世界中,這種能力曾經(jīng)遙不可及,但隨著眼動(dòng)追蹤技術(shù)的突破,這一幻想終于邁向現(xiàn)實(shí)。

2016年前后,初代VR/AR眼鏡和頭顯的問(wèn)世,讓用戶得以進(jìn)入沉浸式的3D虛擬環(huán)境,體驗(yàn)身臨其境的感官刺激。然而,由于當(dāng)時(shí)的技術(shù)局限,仍然只能依靠手柄、控制器或頭部移動(dòng)來(lái)操作虛擬世界,無(wú)法真正實(shí)現(xiàn)“以眼控物”。更令人遺憾的是,早期的設(shè)備易造成眩暈,交互方式也略顯生硬,距離真正的自然沉浸式體驗(yàn)仍有較大差距。

圖源@元時(shí)文化

如今,人們僅憑雙眼便可精準(zhǔn)操控虛擬空間,眼動(dòng)儀能夠?qū)崟r(shí)捕捉眼球的移動(dòng)軌跡,并將其轉(zhuǎn)化為交互指令,它不僅讓數(shù)字世界更加智能化,也讓人與虛擬環(huán)境之間的連接更加緊密。無(wú)論是在VR游戲、虛擬會(huì)議,還是遠(yuǎn)程醫(yī)療、智慧辦公等場(chǎng)景,眼動(dòng)追蹤都讓交互變得更加直觀和高效。

不僅如此,該技術(shù)還能通過(guò)追蹤用戶的凝視點(diǎn),動(dòng)態(tài)調(diào)整畫(huà)面渲染,極大降低VR使用時(shí)的暈眩感,使虛擬體驗(yàn)更加順暢自然。未來(lái),或許我們真的可以?xún)H憑眼神,便能在虛擬世界中自由穿梭,創(chuàng)造屬于自己的數(shù)字奇跡。

圖源@元時(shí)文化

在元宇宙的構(gòu)建過(guò)程中,注意力計(jì)算是優(yōu)化用戶體驗(yàn)的重要手段之一。

眼動(dòng)儀能夠?qū)崟r(shí)追蹤用戶的凝視點(diǎn)、眼動(dòng)軌跡以及瞳孔變化,從而計(jì)算出用戶的注意力分布情況。這種數(shù)據(jù)可以用于優(yōu)化虛擬環(huán)境的設(shè)計(jì),例如在VR游戲中,系統(tǒng)可以根據(jù)用戶的凝視方向動(dòng)態(tài)調(diào)整畫(huà)面細(xì)節(jié),降低不必要的計(jì)算負(fù)擔(dān),提高渲染效率。

此外,注意力計(jì)算還可以用于廣告投放的優(yōu)化,通過(guò)分析用戶對(duì)不同廣告元素的關(guān)注程度,實(shí)現(xiàn)精準(zhǔn)營(yíng)銷(xiāo)。這不僅能夠提高廣告的投放效率,還能避免用戶因無(wú)關(guān)信息而分散注意力,從而提升整體的沉浸體驗(yàn)。

圖源@元某人

在元宇宙的人機(jī)交互方面,眼動(dòng)儀的應(yīng)用極大地提升了交互的自然性和便捷性。傳統(tǒng)的交互方式依賴(lài)于手柄、觸控板或語(yǔ)音指令,而眼動(dòng)追蹤技術(shù)則提供了一種更為直觀的交互方式。例如,在VR環(huán)境中,用戶可以通過(guò)凝視來(lái)選擇菜單項(xiàng),而無(wú)需使用手柄進(jìn)行繁瑣的操作。這種“凝視選取”(Gaze-based Selection)技術(shù)已經(jīng)在多個(gè)VR設(shè)備中得到了應(yīng)用。

此外,眼動(dòng)儀還可以結(jié)合眨眼和瞳孔收縮等生理信號(hào),實(shí)現(xiàn)更豐富的交互方式。例如,在虛擬社交平臺(tái)中,用戶可以通過(guò)眨眼發(fā)送表情,或通過(guò)瞳孔變化傳遞情緒信息,從而增強(qiáng)虛擬環(huán)境中的情感交流。

圖源@元時(shí)文化

在應(yīng)用方向上,眼動(dòng)儀在多個(gè)元宇宙相關(guān)的領(lǐng)域展現(xiàn)出了巨大的潛力。

在教育培訓(xùn)方面,眼動(dòng)追蹤可以用于評(píng)估學(xué)生的注意力分布,從而優(yōu)化教學(xué)內(nèi)容。例如,在VR課堂中,系統(tǒng)可以實(shí)時(shí)監(jiān)測(cè)學(xué)生對(duì)不同知識(shí)點(diǎn)的關(guān)注情況,并根據(jù)數(shù)據(jù)調(diào)整教學(xué)節(jié)奏,提高學(xué)習(xí)效率。

在職業(yè)培訓(xùn)中,眼動(dòng)儀可以用于模擬訓(xùn)練,例如飛行員訓(xùn)練、醫(yī)療手術(shù)模擬等,通過(guò)分析學(xué)員的注意力焦點(diǎn)來(lái)評(píng)估他們的操作熟練度,并提供個(gè)性化的反饋。

圖源@秦朔朋友圈

在醫(yī)療康復(fù)領(lǐng)域,眼動(dòng)儀同樣發(fā)揮著重要作用。例如,對(duì)于腦損傷或中風(fēng)患者,眼動(dòng)追蹤技術(shù)可以用于評(píng)估患者的認(rèn)知功能和視力恢復(fù)情況,并輔助康復(fù)訓(xùn)練。

對(duì)于患有自閉癥或注意力缺陷多動(dòng)障礙(ADHD)的兒童,眼動(dòng)數(shù)據(jù)可以用于評(píng)估他們的注意力模式,并設(shè)計(jì)個(gè)性化的干預(yù)方案。

元宇宙的虛擬環(huán)境提供了一個(gè)安全且可控的訓(xùn)練空間,使這些患者能夠在沉浸式環(huán)境中進(jìn)行康復(fù)訓(xùn)練,進(jìn)而提高康復(fù)效果。

圖源@浦東發(fā)布

在娛樂(lè)和內(nèi)容創(chuàng)作方面,眼動(dòng)儀的應(yīng)用進(jìn)一步提升了用戶體驗(yàn)。在VR電影和游戲中,眼動(dòng)追蹤技術(shù)可以用于“動(dòng)態(tài)渲染”(Foveated Rendering),即系統(tǒng)僅對(duì)用戶凝視區(qū)域進(jìn)行高精度渲染,而對(duì)視野邊緣區(qū)域進(jìn)行低精度渲染,從而大幅降低計(jì)算成本,提高圖像質(zhì)量。

此外,在互動(dòng)敘事中,眼動(dòng)數(shù)據(jù)可以用于動(dòng)態(tài)調(diào)整劇情發(fā)展。例如,在一款恐怖游戲中,系統(tǒng)可以根據(jù)玩家的眼動(dòng)數(shù)據(jù)判斷他們的恐懼程度,并動(dòng)態(tài)調(diào)整游戲節(jié)奏和情節(jié),以增強(qiáng)沉浸感和個(gè)性化體驗(yàn)。

圖源@ChatGPT

從商業(yè)價(jià)值角度來(lái)看,眼動(dòng)儀的應(yīng)用不僅提高了元宇宙平臺(tái)的用戶粘性,還促進(jìn)了精準(zhǔn)營(yíng)銷(xiāo)和商業(yè)模式的創(chuàng)新。在虛擬購(gòu)物中,眼動(dòng)追蹤可以用于分析消費(fèi)者的關(guān)注點(diǎn),并推薦最符合他們興趣的商品。

在廣告投放方面,品牌可以利用眼動(dòng)數(shù)據(jù)優(yōu)化廣告內(nèi)容和位置,提高廣告的轉(zhuǎn)化率。同時(shí),眼動(dòng)追蹤還可以用于優(yōu)化用戶界面設(shè)計(jì),提高用戶體驗(yàn),進(jìn)而增強(qiáng)用戶對(duì)元宇宙平臺(tái)的依賴(lài)度。

Pupil Labs Neon眼動(dòng)追蹤系統(tǒng)消除了傳統(tǒng)上與眼動(dòng)追蹤相關(guān)的障礙,無(wú)需設(shè)置,無(wú)需校準(zhǔn),戴上即采集,被試者采集條件不限(年齡、性別、有無(wú)眼妝、有無(wú)隱形眼鏡等)。

NeonNet深度學(xué)習(xí)注釋分類(lèi)算法,即使在最苛刻的條件下,如白天黑夜、攀巖騎行等,也能提供前所未有的數(shù)據(jù)質(zhì)量。

技術(shù)原理:

1、Neon有兩個(gè)眼睛攝像頭,每只眼睛一個(gè),運(yùn)行頻率為200Hz。

2、攝像頭的最佳位置靠近鼻子,以確保所有拍攝對(duì)象的眼睛的最大可見(jiàn)度并最大限度地減少遮擋。

3、您將始終可以訪問(wèn)所有原始數(shù)據(jù)、中間數(shù)據(jù)和最終數(shù)據(jù),無(wú)需特殊許可證。

軟件參數(shù):

1、Neon Companion應(yīng)用程序記錄眼動(dòng)追蹤數(shù)據(jù)并實(shí)時(shí)監(jiān)控實(shí)驗(yàn)。

2、Neon Companion應(yīng)用程序提供注視數(shù)據(jù)、場(chǎng)景視頻和眼睛視頻的實(shí)時(shí)預(yù)覽。輕松管理主題并使用模板添加元數(shù)據(jù)。立即直接在設(shè)備上播放錄音并上傳至Pupil Cloud。

3、Pupil Cloud中的高級(jí)注視映射和場(chǎng)景理解算法可安全存儲(chǔ)和分析數(shù)據(jù)

4、通過(guò)本地WiFi將數(shù)據(jù)傳輸?shù)饺魏尉W(wǎng)絡(luò)瀏覽器,遠(yuǎn)程控制您的所有設(shè)備:開(kāi)始和停止錄音、添加事件注釋等。

5、Pupil Cloud是基于網(wǎng)絡(luò)的眼動(dòng)追蹤平臺(tái),用于數(shù)據(jù)物流、分析和可視化。利用云計(jì)算能力來(lái)幫助深入了解您的眼動(dòng)追蹤數(shù)據(jù)集。

6.錄音可以自動(dòng)上傳到您的Pupil Cloud云帳戶。

7、Pupil Cloud可以讓您輕松地與協(xié)作者共享數(shù)據(jù),同時(shí)保持完全的訪問(wèn)控制。存儲(chǔ)符合GDPR要求并保護(hù)隱私。

8、Pupil Cloud提供了一系列工具,可以完全自動(dòng)化傳統(tǒng)上

勞動(dòng)密集型任務(wù),借助參考圖像映射器,您可以簡(jiǎn)單地獲取刺激的參考圖像,并使用復(fù)雜的算法將視線完全自動(dòng)映射到它,自動(dòng)將視線映射到環(huán)境中的特征/物體上。

9、臉部映射器:檢測(cè)場(chǎng)景視頻中的面部并將注視數(shù)據(jù)映射到它們上。

10、標(biāo)記映射器:使用April Tags定義曲面,將視線映射到這些表面上。

11、凝視疊加:自定義凝視、注視和場(chǎng)景視頻的可視化。批量渲染視頻部分以進(jìn)行定性分析和可視化。

隨著“可用眼代替手”的場(chǎng)景需求日益增多,眼動(dòng)追蹤技術(shù)還有更多可以大顯身手的地方。相信,在Pupil Labs Neon眼動(dòng)追蹤系統(tǒng)的助力下,元宇宙的體驗(yàn)將更上一層樓。

未來(lái)這一技術(shù)將進(jìn)一步推動(dòng)虛擬世界的沉浸感、交互性和智能化水平的發(fā)展,為人類(lèi)的數(shù)字化體驗(yàn)帶來(lái)革命性的變革。在元宇宙的宏偉藍(lán)圖下,眼動(dòng)儀無(wú)疑將成為連接虛擬與現(xiàn)實(shí)的重要橋梁,為未來(lái)的數(shù)字世界開(kāi)辟更加廣闊的可能性。

圖源@元宇宙數(shù)字藝術(shù)